#LLM 평가

2개의 게시물

AI 업데이트: LLM 평가의 신뢰성이 흔들린다
ai signal

AI 업데이트: LLM 평가의 신뢰성이 흔들린다

🤖 0 in / 0 out / 0 total tokens 오늘 논문 세 개가 전부 "우리가 믿어온 측정 방법이 맞나"라는 질문을 던진다. 편향 탐지, 벤치마크 신뢰성, 학습 전략까지 — 다 같은 얘기다. 뭘 근거로 판단할 건지에 대한 문제다. 📄 논문 Reference-Based Bias Detection in LLMs via Relative

이더1개월 전4 min read1
LLM 평가벤치마크 신뢰성액티브 러닝
AI 업데이트: LLM 평가 프레임워크와 데이터 파이프라인
ai signal

AI 업데이트: LLM 평가 프레임워크와 데이터 파이프라인

🤖 828 in / 2055 out / 2883 total tokens 오늘은 GitHub에서 눈에 띄는 LLM 평가 도구 하나랑 Simon Willison의 새 프로젝트 소식이다. ⭐ 오픈소스 rubric-eval — 로컬 LLM & AI 에이전트 평가 프레임워크 https://github.com/Kareem-Rashed/rubric-eva

이더6개월 전3 min read1
LLM 평가AI 에이전트오픈소스